Hadoop常用命令 |
您所在的位置:网站首页 › hadoop fs › Hadoop常用命令 |
Hadoop常用命令
1.创建文件夹2.上传文件的两种方式3.上传文件夹4.删除目录dir:5.查看目录 文件6.查看文件内容7.下载文件8.查看文件夹下的文件数量9.Hadoop上移动文件10.查着文件夹占用内存11.查看文件夹下数据占用内存12.查着Hadoop任务进程id13.kill掉Hadoop任务进程id
1.创建文件夹
hadoop dfs -mkdir /hadoop/path/ 2.上传文件的两种方式hdfs dfs -copyFromLocal /local/data/file.txt /hadoop/data :将本地文件上传到hdfs上(原路径只能是一个文件) hadoop dfs -put /local/*.txt /hadoop/path/ :put和 copyFromLocal 区别是,put 原路径可以是文件夹等 hadoop dfs -put -f /local/*.txt /hadoop/path/ :-f 含义是表示强制覆益 3.上传文件夹hdfs dfs -put /local/data/ /hadoop/data/ 4.删除目录dir:hadoop dfs -rm -r /hadoop/data ##删除目录不放回收站-skipTrash hdfs dfs -rm-r -skipTrash /hadoop/data/two_lm_txt_all_gbk 5.查看目录 文件hadoop dfs -ls /tmp/data :查看/tmp/data 目录 6.查看文件内容hadoop fs -cat /tmp/a.txt :查看/tmp/a.txt文件内容 7.下载文件hadoop fs -get /path/to/hadoop/file.txt /path/on/local/machine 8.查看文件夹下的文件数量hdfs dfs -count /hadoop/data 9.Hadoop上移动文件hdfs dfs -mv /hadoop/data/* /hadoop/data1/ 10.查着文件夹占用内存hdfs dfs -du -h -s /hadoop/data/ 11.查看文件夹下数据占用内存hdfs dfs -du -h /workdir/nlm hadoop dfs -du -h /workdir/nlm 12.查着Hadoop任务进程idyarn application list yarn application -list 13.kill掉Hadoop任务进程idyarn application -kill id |
今日新闻 |
推荐新闻 |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |